일반뉴스 코오롱베니트, SK증권 데이터 플랫폼 CDP로 최신화 지원
코오롱그룹 IT서비스 전문기업 코오롱베니트가 SK증권의 '데이터 플랫폼 고도화 사업'을 완료하고 최대 12배까지 데이터 처리 성능을 향상시켰다고 21일 밝혔다. 이번 사업은 SK증권의 데이터 플랫폼을 최신화해 빅데이터를 효율적으로 관리하고 활용도를 높이기 위해 추진됐다. 코오롱베니트는 SK증권이 기존 사용하던 '호튼웍스 데이터 플랫폼(Hortonworks Data Platform, HDP)'을 '클라우데라 데이터 플랫폼(Cloudera Data Platform, CDP)'으로 업그레이드했다. 새롭게 구축된 클라우데라 데이터 플랫폼은 개방형 데이터 레이크하우스를 기반으로 한 통합형 플랫폼이다. 데이터 수집, 관리, 분석 등과 관련된 다양한 오픈소스 솔루션과 결합할 수 있어 사용자가 쉽고 빠르게 데이터에 접근할 수 있다. 실제로 SK증권은 클라우데라 데이터 플랫폼을 도입한 결과 데이터 처리 성능을 최대 12배까지 끌어올렸다. 또한 코오롱베니트는 데이터 흐름 자동화 도구인 '아파치 나이파이(Apache NiFi)'를 함께 도입했다. SK증권의 경영활동, 웹사이트, 공공데이터 수집 등 내외부에서 발생하는 대용량 데이터를 변환 및 체계화해 클라우데라 데이터 플랫폼으로